Het kasteel Allart werd begin 1800 opgetrokken in laat-classicistische stijl en is gebouwd als buitenhuis in opdracht van de familie De Brabander-Cottignies.
In 1870 werd het domein gekocht door dokter en consul van België Louis Sioen, die in het Franse Tourcoing woonde. Hij was de grootvader van de Franse industrieel en ingenieur Georges Allart, naar wie het kasteel later werd vernoemd. Georges Allart erfde het domein in 1909 en ging er wonen. Hij liet het kasteel in 1910 uitbreiden en verbouwen, waarbij het hoofdgebouw werd gerenoveerd, de zijvleugels werden verhoogd en een hoektorentje in art nouveau stijl werd toegevoegd. Ook werden er tal van dienstgebouwen aangebouwd. Bovendien breidde hij het domein uit met 2 hectare grond, waarop een Engels landschapspark werd aangelegd. Na het overlijden van Georges Allart in 1962 bleef het kasteel gedurende meer dan 30 jaar verlaten.
Aan het einde van de jaren 90 werd het uiteindelijk gerestaureerd door de familie Guillemyn. Vandaag is het kasteel, samen met de vijvertuinen, in het bezit van notaris Vincent Guillemyn, die het ook bewoont.